查看原文
其他

AnimationGPT:一款用于生成游戏战斗动作资产的AIGC工具

renee创业狗 Renee 创业随笔
2024-10-10

之前看过英伟达做的 CALM,今天介绍一个在 MotionGPT 基础上训练的专门用于游戏的项目。AnimationGPT 是一个专注于根据文本生成战斗风格角色动画的项目。

生成的动画可以下载为 mp4 或 bvh 格式。

为了在动作生成任务中引入大规模语言数据和模型,AnimationGPT采用了一个统一的动作-语言框架,名为 MotionGPT。具体来说,MotionGPT 采用人类运动的离散向量量化方法,并将 3D 动作转换为动作词元,这类似于生成词语词元的过程。在这种“动作词汇”基础上,以统一的方式对动作和文本进行语言建模,将人类运动视为一种新的外语,借助模型的推理将人类的自然语言“翻译”成最贴切的人类动作序列。

该项目在 MotionGPT 的基础上进行训练,并生成了第一个专门用于战斗风格的角色动画数据集,命名为 CombatMotion。与当前的文本到动作数据集相比,CombatMotion 具有以下特点:

  1. 来源于游戏资产。
  2. 具有战斗风格,动作游戏中的动画风格集中,动作类型具有偏向性。
  3. 文本注释更加详细。

数据集还可以这里下载⏬:https://drive.google.com/file/d/148AwoovJrnh4F0q_HbU83WCWwFooLSZj/view

继续滑动看下一个
Renee 创业随笔
向上滑动看下一个

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存